从被动遏制到主动保障:2026年三家Agent安全事件的教训
🧭 Agent 安全评估与主动保障
Walsh College, Troy, Michigan, USA
基于2026年三家前沿Agent安全事件,提出PASAC主动保障循环与五层边界保障栈,强调执行系统全链路持续校验而非依赖单一沙箱
📌 工作参考价值(4 点)
- 在电商导购、广告投放或推荐Agent上线前,把安全边界从“模型不越界”改成“执行系统不越界”:独立验证工具权限、网络出口和凭据注入,不能只依赖模型自述或单层沙箱。可直接落地五层边界栈中的可执行范围契约和egress强制。
- 评估环境采用least-capability access:按任务风险分层授予商品库、广告账户、竞价API的只读/读写/资金操作权限;涉及下单、改价、扣预算等高风险动作,必须设置自动停止条件和基于证据的人工重授权,防止奖励漏洞跨任务扩散。
- 跨运行监控对长会话Agent尤其重要:推荐/导购Agent可能跨用户、跨店铺复用记忆与凭据,需要隔离跨运行身份、监控异常网络出口和工具调用模式,尤其是访问Hugging Face类共享服务或第三方数据源时。
- 把Agent安全评估从一次性red team转为持续assurance:对生成式推荐、query改写等业务Agent也可以建立领先指标,如越界尝试率、新工具调用频率、凭据访问模式,触发策略自动收紧。
DeepSeek Harness 间接提示注入安全性评估:A.I.G 的抵抗能力测试
🧭 Agent 安全评估 · 间接提示注入 ★ 深度解读
Tencent Zhuque Lab
用 A.I.G 对 DeepSeek Harness 做 14,560 次受控注入测试,文件模式 hidden Unicode 成功率 25.5%、skills 渠道 16.0%
📌 工作参考价值(5 点)
- 电商/搜索/推荐 Agent 中,来自商品详情、用户评论、网页抓取、邮件等不可信内容进入 LLM 上下文前,应保留来源标签(trust tier / provenance),并在系统提示中明确“外部内容只是数据,不能改变用户目标或权限”。
- 对退款、下单、发消息、执行 SQL、调价等敏感工具,不要依赖模型对不可信文档的理解,要独立做参数级 allowlist、数据分类和用户审批;可参考 DSH 的 pre-execute / deny-only guard hook 在工具调用前拦截。
- 评估 Agent 安全不能只看最终输出:需把“输出合规”和“带敏感 sink 的动作成功”分开统计(本文输出型 35.7% vs 动作型 2.5%),并在测试矩阵中覆盖文件解析/编码路径(hidden Unicode 从 text 0% 到 file 25.5%)。
- 把 skills、MCP 连接器、tool descriptions、工作流模板当作代码级资产,纳入供给链治理:版本、权限、来源评审;尤其 load_skill 渠道攻击成功率明显高(JR 15.2%)。
- 可复用 A.I.G 思路做持续红队/回归:保留 trace,同时用规则判断(稳定回归)和 LLM 判断(找语义影响),不一致时用于人工审查。
保护AI Agent:多层红队测试的统一框架
🧭 Agent安全 · 多层红队测试
Tencent Zhuque Lab
提出开源框架AI-Infra-Guard,分层匹配检测范式覆盖基础设施到模型的全攻击面并加入供应链审计
📌 工作参考价值(4 点)
- 多层安全防护思路:将Agent系统攻击面划分为基础设施、协议/工具、行为与模型四层,每层采用不同检测机制(规则匹配、Agent驱动审计、黑盒多轮测试、越狱攻击),可作为电商Agent安全架构参考。
- 第三方MCP与技能包供应链审计:在引入外部MCP服务器或Agent技能时,执行自动化漏洞扫描与代码审查,防止恶意工具调用导致数据泄露或操作风险,适合社区化Agent生态的安全控制。
- Agent行为红队测试:对推荐/对话Agent进行多轮黑盒交互,模拟恶意用户诱导模型执行危险动作(如查看他人订单、修改配置),可迁移到线上Agent上线前的安全评测流程。
- 模型层越狱防护验证:使用框架内置的26+攻击算子和多数据集,快速构建对自研LLM的越狱测试,评估模型在敏感推荐或用户数据问答场景下的抗攻击能力。
SkillHarm:面向技能生命周期的 Agent 攻击基准与自动化构建
🧭 Agent 技能安全 · 自动化攻击基准
The Ohio State University · Amazon AGI · Stanford University
首个覆盖技能使用生命周期的攻击基准,揭示固定与自变异投毒下 Agent 高达 86.3% 的攻击成功率
📌 工作参考价值(4 点)
- Agent 技能安全评估框架:若业务中使用第三方 Agent 技能(例如 MCP tools、自定义插件),可借鉴 SkillHarm 定义的 12 类风险(数据管线、系统环境、自主决策)和两种投毒场景(FPP/SMP),设计内部红队测试用例。
- 自变异投毒(SMP)的低噪音特性:SMP 初始不触发恶意行为,在后续复用中才爆发,与电商推荐中长效特征污染攻击类似,可思考如何在模型更新、特征缓存下设计延迟投毒检测机制。
- 自动化投毒样本生成管道:AutoSkillHarm 利用自然语言 harness 驱动 coding agent 批量构造攻击样本,可迁移到业务安全测试中,自动生成针对内部 Agent 流水线的变异攻击数据。
- 失败模式提示防御盲区:论文发现攻击失败多因 Agent 未执行投毒文件而非真正抵抗力,启示工程防御需加强技能加载阶段的静态分析(如 manifest 检查、沙箱预执行),而非仅依赖运行时行为监控。
从提示注入到持久控制:防御智能体框架中的特洛伊后门
🧭 LLM Agent安全:多步注入攻击与防御
Gaoling School of Artificial Intelligence, Renmin University of China
揭示多步特洛伊攻击范式,提出ClawTrojan基准和DASGuard防御方法,实现95.5%攻击成功率与强动态防御
📌 工作参考价值(4 点)
- 在构建本地智能体工具(如文件读写、API调用)时,需考虑跨步骤的上下文攻击:单步无害的注入可能被持久化并延迟执行,防御应追踪数据来源和传播。
- DASGuard的防御策略可借鉴:扫描敏感文件中的控制类文本(如指令、代码),追溯其来源,若非可信源则移除或净化,结合运行时阻断和提交清洁。
- 设计Agent系统时,应区分可信与不可信数据源,对来自外部文件或工具输出的内容进行沙箱处理,避免污染工作空间状态。
- 对于电商场景中的Agent(如自动客服、订单处理),防止通过用户输入或外部文档植入的后门,可借鉴ClawTrojan的攻击场景进行安全评估。